První písemná zmínka pochází z roku 1238, kdy zde stály dvě tvrze - maloskalická a velkoskalická. Postavili je příslušníci rodu erbu zlatého třmene, později psaní ze Skalice. Velkoskalické panství vlastnili ve 14. století páni z Dubé a páni z Boskovic, v roce 1393 je zakoupil Jetřich z Janovic a připojil je k náchodskému panství. Na zboží maloskalickém seděli páni z Ostřešan, páni z Lužan a páni z Koloděj od roku 1417. V roce 1575 je připojili k náchodskému panství Smiřičtí. Roku 1623 se majiteli stali Trčkové z Lípy a v roce 1634 Piccolominiové. Desfoursové získali panství roku 1783 a v roce 1792 Petr Biron, vévoda Kuronský a Zaháňský. Knížata Schaumburg - Lippe byli posledními majiteli v letech 1842 - 1945.